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Sf2ii l . l f EME, i T P0UR PRODUCTION AUTOMATIQUE EN TEMPS REEL DE SEQUENCES AUDIOVISUELLES 
VIRTUELLES A PARTIR D'UN MESSAGE TEXTUEL ET POUR LA DIFFUSION DE TELLES SEQUENCES 



La pr6sente Invention se rapporte a un equipement 
pour la production automatique, en temps reel, de sequen- 
ces audiovisuelles virtuelles a partir d'un message textuel 
exprime dans un langage naturel et pour la diffusion de tel- 
les sequences, du type comportant un module de synthese 
vocale (13), un module graphique (12) pour la generation 
d'images de synthese et un processeur pour piloter les in- 
terfaces d'entree et de sortie ainsi que lesdits modules, ca- 
racterise en ce qu'll comporte une premiere memoire dans 
laquelle est enregistree une base de donnees de comporte- 
ment (5), un module d'analyse de texte (7) recevant les 
messages provenant d'une interface (1) d'entree et gene- 
rant des marqueurs comportementaux Issus de la base de 
donnees de comportements (5) en fonction des messages 
d'entree, lesdits marqueurs pilotant le module graphique 
(12), requipement comportant en outre des moyens pour la 
synchronisation du module de synthese vocale et du modu- 
le graphique et des circuits audio et video recevant les don- 
nees provenant des modules de synthese vocale et 
graphique pour deiivrer un signal audiovisuel. 

La presente invention se rapporte 6galement a un pro- 
cede de production automatique, en temps reel, de sequen- 
ces audiovisuelles virtuelles. 
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EQUIPEMENT POUR PRODUCTION AUTOMAT I QUE EN TEMPS REEL DE 
SEQUENCES AUDIOVISUELLES VIRTUELLES A PARTIR D'UN MESSAGE 
TEXTUEL ET POUR LA DIFFUSION DE TELLE S SEQUENCES. 

La pr^sente invention concerne le domaine des 
6quipements pour la production automatique de sequences 
audiovisuelles virtuelles k partir d'un message textuel et 
pour la diffusion de telles sequences. 

On connait dans l'6tat de la technique 
diff6rentes solutions pour produire des sequences 
d' animation virtuelles associ^es h la synthase vocale. 

Le brevet am^ricain US 5 970 459 par exemple 
d^crit un syst^me pour la synchronisation entre une image 
anim6e et un convertisseur de synthase vocale . 

Le brevet US 5 63 0 017 d^crit un 6quipement 
pour 1' animation des mouvements de 16vres d'une image de 
synthase en f onction de donn^es textuelles . 

Le but de 1' invention est d ' automat iser en 
temps r6el la production d' images animdes audiovisuelles 
dont le comportement est repr£sentatif du contenu 
syntaxique et grammatical et du contexte des donn^es 
textuelles provenant de sources ext^rieures et d' assurer 
leur diffusion en temps r£el ou diff6r6. 

L' invention concerne selon son acception la 
plus g£n6rale un £quipement pour la production automatique, 
en temps r£el, de sequences audiovisuelles virtuelles 2i 
partir d'un message textuel exprim6 dans un langage naturel 
et pour la diffusion de telles sequences, du type 
comportant un module de synthase vocale, un module 
graphique pour la g6n£ration d' images de synthase et un 
processeur pour piloter les interfaces d' entree et de 
sortie ainsi que lesdits modules, caract£ris£ en ce qu'il 
comporte une premiere m^moire dans laquelle est enregistr^e 
une base de donn6es de comportement, un module d' analyse de 
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texte recevant les messages provenant d'une interface 
d' entree et g6n6rant des marqueurs comportementaux issus de 
la base de dbnn^es de comportements en fonction des 
messages d' entree, lesdits marqueurs pilotant le module 
graphique, l'6quipement comportant en outre des moyens pour 
la synchronisation du module de synthase vocale et du 
module graphique et des circuits audio et vid6o recevant 
les donn^es provenant des modules de synthase vocale et 
graphique pour d61ivrer un signal audiovisuel. 

Les moyens et modules peuvent §tre 
indif f £remment constitu^s de circuits 61ectroniques ou de 
modules purement inf ormatiques / 

Le terme de signal audiovisuel se rapporte a 
tout type de signal permettant de r^aliser au moins une 
image et du son, y compris, par exemple, a une image 
programm£e . 

Le langage naturel du message textuel s'entend 
de toute langue qui ne soit pas un langage inf ormatique 
artif iciel . 

Avantageusement , 1 ' 6quipement selon 1 ' invention 
comporte en outre une base de donn^es d'univers virtuels 
contenant des donn^es num6riques pour produire des decors 
et personnages animus, la base de donn6es de comportements 
comportant des descripteurs pour le pilotage par le module 
d' analyse de texte et les animations comportementales de la 
base d'univers virtuels. 

Avantageusement 6galement, 1 ' <§quipement selon 
1' invention permet de r^aliser des animations en temps r6el 
et de les diffuser en temps r6el, voire en temps diff6r£. 

Avantageusement enfin, l'£quipement selon 
1' invention permet d'£viter d'utiliser un langage 
inf ormatique en entree. 
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Selon une variante, il comporte une machine de 
rendu comportant un automate de traitement du texte dont 
les etats contiennent les actions k r6aliser sur les scenes 
provenant des bases de donn^es. 
5 Selon une autre variante avantageuse, il 

comporte un module de sortie pour num^riser et compresser 
le signal audiovisuel, la sortie dudit module etant relive 
k un serveur de diffusion sur un r^seau de 
telecommunication, en temps r6el ou en temps differe. 

10 L»' invention concerne egalement un procede de 

production automatique, en temps reel, de sequences 
audiovisuelles virtuelles, caract6ris6 en ce que 1'on 
proc&de k une analyse du texte provenant d'une interface 
d' entree, pour produire des marqueurs comportementaux issus 

15 d'une base de donn^es de comportements en fonction du 

message d' entree, lesdits marqueurs pilotant un module 
graphique synchronise avec un module de synthase vocale 
pour g£n£rer un signal audiovisuel. 

L»' invention sera mieux comprise k la lecture de 

2 0 la description qui suit, se r£f£rant & la figure 1 annex£e 

repr£sentant le schema de principe d'un equipement selon un 
mode de realisation non limitatif de 1' invention. 

La figure 1 represente 1 ' architecture generale 
d'un equipement selon 1' invention. 

25 Une interface (1) regoit un fichier texte, par 

exemple depuis un clavier de saisie, ou une base de 
donnees, ou encore par un reseau inf ormatique, par exemple 
Internet, ou par un reseau teiephonique, par reconnaissance 
vocale ou analyse de la voix. 

30 Un serveur (2) regoit le fichier texte, par un 

canal de reception (3) pilote par une console de 
commande (6) assurant la definition du contexte de 
diffusion et le cas echeant la mise h jour en temps reel 
des donnees . 
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Le serveur comporte une base de donn^es de 
comportement (5) contenant des marqueurs correspondant aux 
correspondances entre les unites lexicales et syntaxiques 
du texte et les animations comportemen tales de la base de 
5 donn6es d'univers virtuels (4) contenant des scenes en 

trois dimensions, par exemple, au format vrml. 

Un module d' analyse de texte (7) est charge 
d' insurer dans le texte source des marqueurs 
comportementaux issus de la base de donn£es . (5) . 

10 Une machine de rendu (10) produit les scenes 3D 

anim^es et sonoris6es, & partir d'un automate et du texte. 
La machine de rendu (10) comprend un automate de 
traitement (9). Les 6tats de 1' automate contiennent les 
actions sur les scenes (chargement, animation, ...) et des 

15 scriptes. Les transitions entre les 6tats se feront k 

partir des mots et marqueurs du texte issus du module 
d' analyse (7) . La definition de l'univers virtuel & charger 
(decors, personnages) se trouve dans 1 ' 6tat initial de 
1 ' automate . 

20 Le texte issu du module d' analyse (7) et 

contenant les mots et les marqueurs, est lu par le 
s^quenceur (11) qui d£clenche la prononciation du texte et 
les actions sur la sc^ne 3D par 1 ' interm6diaire de 
1' automate (8b). Le module graphique (12) en trois 

25 dimensions et le module de synthase vocale (13) sont 

synchronises en temps r£el. Il est possible de d£porter le 
module de synthase vocale sur une autre machine. 

Le module de synthase vocale (13) g6n£re le 
signal audio qui est traits par une interface de sortie 

30 (15) . Le module graphique (12) g6n£re le signal vid6o qui 

est traite par une interface de sortie (14) . Un encodeur 
(16) num£rise les donn6es audio et vid£o et g^n^re un 
signal num£rique comprint dirig£ vers un serveur de 
diffusion (17) . 
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L' ensemble des operations , depuis 1' entree du 
texte jusqu'& la g6n6ration des images et la synthase du 
son, est effectu6 en temps r6el. La diffusion de masse peut 
©tre effectu6e en temps r6el ou en temps diff6r6, suivant 
le proc6d6 utilise. 

La machine de rendu (10) peut 6ventuellement 
§tre d<§port6e sur chaque terminal. 
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1. Equipement pour la production automatique, 
en temps r6el, de sequences audiovisuelles virtuelles k 

5 partir d'un message textuel exprim6 dans un langage naturel 

et pour la diffusion de telles sequences, du type 
comportant un module de synthase vocale (13) , un module 
graphique (12) pour la g6n6ration d' images de synthase et 
un processeur pour piloter les interfaces d' entree et de 

10 sortie ainsi que lesdits modules, caract6ris6 en ce qu'il 

comporte une premiere m&noire dans laquelle est enregistr^e 
une base de donn^es de comportement (5) , un module 
d' analyse de texte (7) recevant les messages provenant 
d'une interface (1) d' entree et g^n^rant des marqueurs 

15 compor tementaux issus de la base de donn6es de 

comportements (5) en fonction des messages d'entr£e, 
lesdits marqueurs pilotant le module graphique (12), 
1' Equipement comportant en outre des moyens pour la 
synchronisation du module de synthase vocale et du module 

20 graphique et des circuits audio et vid£o recevant les 

donnEes provenant des modules de synthase vocale et 
graphique pour d^livrer un signal audiovisuel. 

2. Equipement pour la production automat ique, 
en temps r£el, de sequences audiovisuelles virtuelles k 

25 partir d'un message textuel, selon la revendication 1 

caract£ris6 en ce qu'il comporte en outre une base de 
donn£es d'univers virtuels (4) contenant des donn^es 
num^riques pour produire des decors et personnages animus, 
la base de donn^es de comportements (5) comportant des 

30 descripteurs pour le pilotage par le module d' analyse de 

texte et les animations comportementales de la base 
d'univers virtuels (4) . 

3. Equipement pour la production automatique, 
en temps r6el, de sequences audiovisuelles virtuelles a 
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partir d'un message textuel, selon la revendication 1 ou 2 
caracterise en ce qu'il comporte une machine de rendu (10) 
comportant un automate de traitement (9) dont les etats 
contiennent les actions a realiser sur les scenes provenant 

des bases de donnees (4 et 5) - 

4 Equipement pour la production automat ique, 
en temps reel, de sequences audiovisuelles virtuelles a 
partir d'un message textuel, selon 1'une au moins des 
revendications precedentes caracterise en ce qu'il comporte 
un module de sortie pour numeriser et compresser le signal 
audiovisuel, la sortie dudit module etant reliee a un 
S erveur de diffusion (17) sur un reseau de 

telecommunication. 

5 precede de production automatique, en temps 
reel de sequences audiovisuelles virtuelles, caracterise 
en ce que 1 < on precede a une analyse du texte provenant 
d <une interface d' entree, pour produire des marqueurs 
comportementaux issus d'une base de 
comportements (5) en fonction du message d'entree. lesdxts 
marqueurs pilotant un module graphique synchronise avec un 

-v^oo vncale pour generer un signal 
module de synthese vocaie pou y 

audiovisuel . 
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Fig ure 1 
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